با سلام خدمت شما بازديدكننده گرامي ، خوش آمدید
به سایت من . لطفا براي هرچه بهتر شدن مطالب اين
وب سایت ، ما را از نظرات و پيشنهادات خود آگاه سازيد
و به ما را در بهتر شدن كيفيت مطالب ياري کنید.
اگر می خواهید در اینترنت جایگاهی داشته باشید و اگر در بلاگفا قرار گرفته اید
مطلب زیر را بخوانید تا دلیل آن را بدانید
در ادامه آدرس وبلاگ خودتان در بلاگفا robots.txt را قرار دهید و اینتر کنید
(این آدرس فایلی است که اگر در هر سایت یا وبلاگ وجود داشته باشد موتورهای جستجو از دستورات داه شده در آن تبعیت می کنند)
چیزی شبیه این به شما نمایش داده میشود
این به این معناست که دست و پای گوگل از این پس
برای ایندکس مطالب شما بسته است
البته دیده بودم بلاگفااجازه ایندکس شدن نظرات
که ملت بیچاره برای افزایش پیج رنک الکی
در آن قرار میدهند را نمی دهد
اما این خیلی بدتره
تنها هدف پایین آوردن بار سرور است و در کل اصلا توصیه نمیشود
و مطلقا ارقام بالای 10 برای Crawl-delay نباید استفاده شود
چون عملا کار ایندکس صفحات مختل میشود
یعنی همین اتفاقی که شما بخوبی متوجه ان شدید
مقاله زیر در مورد نحوه تنظیم آن است که در آن نیز به اینکه
بهتر است هیچ مقداردهی برای آن صورت نگیرد و
اگر مجبور به انجام شدیم از 10 بالاتر نرویم آمده
http://www.crystone.net/blog/post/Crawl-Delay-Settings.aspx
مطلب زیر نیز از ویکی پدیا در همین مورد
http://en.wikipedia.org/wiki/Robots_exclusion_standard
آخه اگر یک سایت ایندکس نشه
که بدرد نمی خوره....